Budapesti Műszaki és Gazdaságtudományi Egyetem - BME -- Távközlési és Médiainformatikai Tanszék - TMIT BME - Távközlési és Mesterséges Intelligencia Tanszék - TMIT
 
 
| Témakiírások | | | | | IW  
 
 
Önálló labor
Kiírt témák

Brain2Speech: beszéd előállítása EEG és nyelvutrahang segítsévével (Brain2Speech: speech production using EEG and tongue-ultrasound)

Ipari partner: MTA TTK Kognitív Idegtudományi és Pszichológiai Intézet

Az agy-számítógép interfészek (BCI) lehetővé teszik a számítógépek közvetlen, fizikai aktivitás nélküli vezérlését, és potenciálisan alkalmazhatók a mozgássérült személyek rehabilitációs eszközeiként. Az összes idegrendszeri képalkotási mód közül az elektroenkefalográfia (EEG) a legmegfelelőbb a BCI számára, mivel lényegesen kisebb kockázattal jár, mint az invazív módszerek. A tiszta és jól használható EEG jel kinyerése azonban kihívást jelent a különböző biofiziológiai hatások miatt, így még nemzetközi szinten sem született teljes megoldás a beszéd alapú BCI-re nem invazív EEG-vel. Egy megfelelő, teljes mondatú beszédet érthető és természetes módon generálni képes agy-beszéd rendszer kidolgozása nagy kihívást jelent. Hiányoznak azok a kombinált módszerek, amelyek a nem invazív EEG-t, az artikulációt és a beszédjeleket összevontan használnák, és elemeznék az agyban zajló tervezési folyamatot. A fenti célok elérése érdekében a feladat artikulációs és agyi jelek elemzések, valamint ezekből beszéd szintetizálása. További információkért keressen minket az Informatika épület B 156-os szobájában, a sztaho.david@vik.bme.hu email címen, vagy Microsoft Teams-en (Sztahó Dávid, sztaho.david@vik.bme.hu)

Brain-computer interfaces (BCI) allow direct control of computers without physical activity and have potential applications as rehabilitation tools for people with disabilities. Of all the neuroimaging modalities, electroencephalography (EEG) is the most suitable for BCI as it is significantly less risky than invasive methods. However, the extraction of a clean and usable EEG signal is challenging due to various biophysiological effects, and thus a complete solution for speech-based BCI with non-invasive EEG has not yet been developed internationally. The development of a suitable brain-speech system that can generate intelligible and natural full-sentence speech is challenging. There is a lack of combined methods that use non-invasive EEG, articulation and speech signals together and analyse the planning process in the brain. To achieve these goals, the task is to analyse articulation and brain signals and synthesise speech from these. For more information, please contact us in the Informatics building, room B 156, at sztaho.david@vik.bme.hu or Microsoft Teams (Sztahó Dávid, sztaho.david@vik.bme.hu)

Kulcsszavak: brain2speech, human computer interface, HCI, eeg, ultrahang, beszéld, agyi jelek
Témavezető: Sztahó Dávid
Oktatók: Arthur Viktor, Sztahó Dávid.
A következő tantárgyakhoz javasolt:
 vitma387 (Önlab, IVIR szakirány)
 vitma415 (Szakdolgozat)
 vitma416 (Szakdolgozat)
 vitma417 (Szakdolgozat, IVIR szakirány)
 vitmal01 (Info, BSc, Önálló laboratórium)
 vitmal04 (Info, BSc, Önálló laboratórium)
 vitmm855 (Info, MSc, Önálló laboratórium 2, Hálózatok és szolgáltatások)
 vitmm861 (Info, MSc, Önálló laboratórium 2, Médiainformatika)
 vitmm905 (Diplomatervezés 1. (Info, Hálózatok és szolgáltatások szakirány))
 vitmm911 (Diplomatervezés 1. (Info, Médiainformatika szakirány))
 vitmml10 (Info, MSc, Önálló laboratórium 1)
 vitmml11 (Info, MSc, Önálló laboratórium 2)
 vitma345 (Vill., BSc. Önálló laboratórium)
 vitma414 (Szakdolgozat)
 vitmal03 (Vill.mérn. BSc Önálló laboratórium)
 vitmm807 (Vill., MSc, Önálló laboratórium 1, Infokommunikációs rendszerek)
 vitmm857 (Vill., MSc, Önálló laboratórium 2, Infokommunikációs rendszerek)
 vitmm907 (Diplomatervezés 1. (Vill. Infokommunikációs rendszerek szakirány))
 vitmml02 (Vill,MSc,Önlab.1, Okos város,Vez.nélküli rendsz. és alk.ok,Multimédia rendsz. és szolg.,Optikai távközlés (VITMML02))
 vitmml03 (Vill,MSc,Önlab.2, Okos város,Vez.nélküli rendsz. és alk.ok,Multimédia rendsz. és szolg.,Optikai távközlés (VITMML03))
 vieum821 (Önálló munka 1)
 vieum871 (Önálló munka 2)
 vieum921 (Diplomatervezés 1 (Egészségügyi mérnök))
QR:    (mi is az?)
 
 katt. a nagyításhoz
 
Kedvencekbe felvesz   Jelentkezés